案例 | 美国Fable:当虚拟人有了生命
在海外众多虚拟人公司中,Fable工作室是一家从沉浸式VR叙事类型转型为虚拟人开发的公司。
2018年成立的Fable脱胎于Oculus 原VR内容团队Oculus Story Studio,其第一个VR体验作品Wolves in the Walls在当年获得了艾美奖。随后Fable展示了它的第一个虚拟人体验Whispers in the Night。
目前Fable公司拥有脱胎于Wolves in the Walls和Whispers in the Night的8岁动画虚拟人Lucy,以及成年虚拟人Charlie和Beck。两者都尝试将计算机动画的艺术作品与快速发展的人工智能技术相结合。
在技术层面,所有的AI角色都依赖于Fable工作室设计的AI向导引擎和其中包含的GPT-3 技术。GPT-3技术是由OpenAI公司提供的自然语言处理模型,基于互联网上的文本,GPT-3 可生成较为逼真的拟人文本。
Fable工作室则在视觉效果、对话、声音和动画制作上创造角色,确保虚拟人和用户的交互。
作为Fable工作室的创始人,Edward Saatch对虚拟人市场有多年涉足,他的另一个身份是虚拟人峰会(virtual Being Summit)的创意构思和组织者。
今年10月举行的第三届年度虚拟人与虚拟社会峰会主题是 Web3/Crypto 和虚拟人,它首次聚集了跨 Web3、去中心化的元宇宙(decentralized metaverse)、人工智能、虚拟网红、智能 NFT 和数字身份的初创公司。
在讨论虚拟人的趋势时,Saatchi 指出,随着新兴技术的使用,物理世界和虚拟世界之间会进一步连接,两者的界限越来越模糊。
Saatchi 的最终愿景是Lucy 或其他虚拟人可以通过开发成为可信的 AI 人物,这些人物在不同体验中能记住观众并与之互动。
VR内容公司的转向
脱胎于Oculus Story Studio
Fable工作室是由原Oculus Story Studio资深团队在2018年推出的VR娱乐公司,在同年圣丹斯电影节fable宣布将重点从VR转移到基于AI的虚拟人。
Oculus Story Studio是一家隶属于Oculus VR的原创动画VR电影工作室,由Edward Saatchi 等人在2014年成立,在2017年被Facebook关闭。
除了Edward Saatchi,Fable团队重要成员联合创始人兼创意总监Pete Billington(原迪士尼、梦工厂、Oculus 故事工作室)和创意制作人Jessica Yaffa Shamash(原皮克斯、Oculus 故事工作室)均有影视公司背景。两人都参与制作了《Whispers in the Night》。
Fable迄今为止Fable融资超过四轮, 曾获得来自GFR Fund 和 SDVentures等基金的融资。
该工作室在2018年圣丹斯电影节推出了改编自尼尔·盖曼 (Neil Gaiman) 的 Wolves in the Walls的 VR 版本,并凭借该作品获得了艾美奖。
此前作为 Oculus Story工作室的联合创始人,Edward Saatchi多年来一直在探索如何使用 VR 让人体验身临其境的叙事。多年对VR 叙事潜力的研究让Saatchi发现,未来讲故事的关键不在于 VR 电影,而在于为 AR 和 VR 设计逼真的角色。他甚至设想了能和观众互动的成长型虚拟伴侣。
这个目标始于工作室《Wolves in the Walls》中的Lucy。Wolves in the Walls仍然是一个非常传统的 VR 叙事。观众可以扮演 Lucy想象中的朋友体验这个故事。但对于 Saatchi 来说,这是迈向他关于虚拟人格设想的第一步。
Fable 随后抓住了虚拟人这一大趋势,将计算机动画的艺术作品与人工智能的快速发展相结合。在Wolves in the Walls之后,Fable在2019年旧金山的虚拟人会议上推出了名为Whispers in the Night的虚拟人体验,主演Lucy即Wolves in the Walls的数字角色。随后Wolves in the Walls的第二章在2019年4 月首映。
在2019年推出Whispers in the Night之前,Fable 的新团队构成是 50% 沉浸式叙事和 50% 机器学习。Saatchi 说道,“五年前如果你组建一个由一半皮克斯和一半游戏组成的团队,这是有争议的。但这是目前普遍的做法。我们已经让游戏和沉浸式叙事和谐共存。接下来是在沉浸式叙事和AI虚拟人之间创造新的变化。”
矩阵产品与技术支撑
Fable的第一个虚拟人Lucy是来自Wolves in the Walls的卡通数字角色,设定为8岁女孩。2020年12月,Fable Studio 宣布了两个新的对话式 AI 虚拟人:Charlie 和 Beck。
在这些角色背后,共同的特点是,基于Fable团队的沉浸式叙事能力以及AI技术的发展,这些角色已经具备一定的智能互动能力。
1.第一个虚拟人lucy
对比Wolves in the Walls中的首度出现,Whispers in the Night体验中的Lucy可以做出反应,横跨多个媒体平台。
Pete Billington表示Whispers建立在《Wolves in the Walls》的情感系统之上。理想情况下,她会记住观众做过的事情,会用不同的情感进行不同的对话。
据Jessica Shamash所说,whispers会形成Lucy第一个记忆。观众会通过自然语言处理NLP与Lucy进行口语对话,而这些互动记忆会被记录下来以备后用。
今年6月,Lucy作为嘉宾出现在圣丹斯电影节,作为一个人工智能角色,她分享自己在圣丹斯观看电影的评论和看法。她还展示了她自己的电影《Dracula》。
一直以来,Lucy一直在与一两个人进行对话,但圣丹斯活动表明她可以与一整群人进行互动。
2.对话式AI虚拟人Charlie 和 Beck
时隔两年后,2020年12月,Fable Studio 宣布了两个新的对话式 AI 虚拟人:Charlie 和 Beck。与其它人工智能角色一样,Beck和Charlie将通过设定好的个性,在每次对话中学习并模仿人类的互动。
Beck和Charlie都设定为生活在现代的成年人。Beck是加拿大奥运运动员,将在第二年去东京划船,而Charlie则是内向的法国音乐家和诗人,住在巴黎学习艺术史。Fable 创意制作人Jessica Shamash说:“我们想打造这些让人仰慕以及给人启发的有意思的角色。”
为了塑造人物,Fable用 GPT-3 技术对人工书写的对话进行了扩展。“GPT-3 具有惊人的能力,可以进行引人入胜而又可信的对话,但它没有记忆感。” Saatchi 说道。
尽管如此,Saatchi 认为,随着时间的推移,虚拟角色会越来越受欢迎。“五年后,我们认为每个 Z 世代的人都会拥有一个AI虚拟人作为密友”。
3.AI引擎的支撑
无论是Lucy,还是Beck Charlie,所有的AI角色都依赖于Fable工作室设计的AI向导引擎(Wizard Engine)。
这一引擎赋予虚拟人生命。具体而言,它作用于三件事:生成、分发和记忆。
该工具设定虚拟人生活的背景,他们将要发生的事情的概要,以及他们生活的内容;它允许Fable和合作者在许多媒体平台上分发虚拟人:在 Twitch、短信应用程序、照片共享应用程序、视频游戏中,以及最终在元宇宙中;更进一步地,它帮助Fable和合作者构建具有记忆的虚拟人,这样这些虚拟人就可以记住他们自己的生活以及他们新学到的知识,并将这些结合起来,创造出观众“被看见”的移情时刻。
通过向少数合作者开放该AI引擎,Fable能够创造基于对方角色设定的虚拟人。据Saatchi称,在推出Lucy的 alpha 测试的六周内,该公司收到巨头公司的关注,对方希望使用AI引擎创建他们自己设定的虚拟人。
目前Fable选择处于时尚和医疗保健领域的合作对象,通过合作创建一个虚拟角色,为角色创造背景故事、生活和审美。创作者能够计划角色会发生什么或者他们将如何与朋友互动等等,合作对象可以通过他们用Fable创造的虚拟人来“盈利”。
在Fable的想象里,一个时尚虚拟人离开设计学校,白天从事实体时尚工作,晚上和周末制作出能用于NFT出售的数字时尚产品。
但将虚拟人商业化并不是唯一目的。“比起赚钱,更重要的是寻找时尚和健康领域的早期合作者,”Saatchi说,“在那个领域可能会有关于虚拟人的好的理念。我认为这些数字角色很快会拥有可供人购买的数字产品。”
虚拟人是未来元宇宙对话的核心
随着元宇宙概念的日趋流行,包括Fable、AI Foundation、和Genvid在内的工作室都正在开发或推出虚拟人。
公开信息显示,Soul Machines 筹集了超过 5000 万美元,用于打造虚拟警察和心理健康专家;AI Foundation 已经为 Digital Deepak Chopra 等虚拟精神导师筹集了超过 1000 万美元;Roblox 游戏“Splash”已筹集了 2000 万美元以发展虚拟网红Kai 。
欧美市场出现的虚拟人的特点和功能也趋于多元,由 AI Foundation 创建的数字人 Deepak Chopra,可以与人交谈并教授冥想;Epic 在创建逼真的动画角色;而Genvid Technologies则通过基于24/7生存游戏的Rival Peak电视节目跨越虚拟角色和观众之间的界限。观众可以通过 Facebook Live和计算机生成的游戏角色互动,为他们的生存投票。此外现在还有像Lil Miquela这样存在于游戏之外的虚拟网红。
Fable的虚拟人设定为生活在所有社交平台上,包括游戏、视频聊天、社交平台等,并且他们会跨平台记住用户。用户可以像与朋友一样与他们进行互动,并且随着时间的推移,当用户和他们发短信、聊天和玩游戏时,会与他们建立复杂的关系。
Edward Saatchi 说,培养虚拟人的最终目标是达到电影中虚拟人的复杂程度和自我意识,例如《Her》或《银翼杀手 2049》。“看到我们与虚拟人和现实生活中的人一起生活的未来。”
“你在元宇宙中的一些朋友将是真实的人,有些将是我们几年前所说的 NPC,但我们都是avatar,只不过有一些是AI驱动,有一些是有血有肉的。虚拟人看起来和我们一模一样,合成语音将使每个人都能进行交流。元宇宙将充满这些角色。”他说。
“这需要很多不同的学科,” Saatchi指出,“构建虚拟人运用到AI、社交、叙事和游戏设计等综合能力。通过团队合作来做到这一点似乎是一个令人兴奋的挑战。”
在游戏方面,Saatchi预测了一个巨大的开放世界,它与拥有 800 万人口的真实城市一样丰富,有程序生成的无限的故事。游戏开发者将变得更加野心勃勃,开发出的角色不仅限于在游戏中,而是生活在超越任何特定平台的无限游戏中。Edward Saatchi认为这些虚拟人将不再是游戏玩家所熟悉的NPC,不会仅仅依赖于某个故事或世界观。
今年8月,Saatchi对外表示,“这一切都是迈向终极元宇宙的第一步,当我们不断将自己数字化,产生越来越多的虚拟人,无论是人还是虚拟人,我们的边界都会在元宇宙中逐渐被消除。”